| 1. Identificação | ||||
| Tipo de Referência | Relatório (Report) | |||
| Site | mtc-m21d.sid.inpe.br | |||
| Código do Detentor | isadg {BR SPINPE} ibi 8JMKD3MGPCW/3DT298S | |||
| Identificador | 8JMKD3MGP3W34T/46243RL | |||
| Repositório | sid.inpe.br/mtc-m21d/2021/12.14.20.09 | |||
| Última Atualização | 2021:12.14.20.09.25 (UTC) simone | |||
| Repositório de Metadados | sid.inpe.br/mtc-m21d/2021/12.14.20.09.25 | |||
| Última Atualização dos Metadados | 2022:07.08.19.41.33 (UTC) administrator | |||
| Chave de Citação | DiasCalhCorr:2021:FeCoTr | |||
| Título | Ferramentas computacionais para tratar a qualidade para dados obtidos através de sensores  | |||
| Projeto | Ferramentas computacionais para tratar a qualidade para dados obtidos através de sensores | |||
| Ano | 2021 | |||
| Data de Acesso | 03 maio 2024 | |||
| Tipo | RPQ | |||
| Número de Páginas | 25 | |||
| Número de Arquivos | 1 | |||
| Tamanho | 816 KiB | |||
| 2. Contextualização | ||||
| Autor | 1 Dias, Guilherme Alvarenga 2 Calheiros, Alan James Peixoto 3 Corrêa, Pedro Luiz Pizzigatti | |||
| Grupo | 1 2 COPDT-CGIP-INPE-MCTI-GOV-BR | |||
| Afiliação | 1 Universidade de São Paulo (USP) 2 Instituto Nacional de Pesquisas Espaciais (INPE) 3 Universidade de São Paulo (USP) | |||
| Endereço de e-Mail do Autor | 1 guiadias@usp.br 2 alan.calheiros@inpe.br 3 pedro.correa@usp.br | |||
| Endereço de e-Mail | guiadias@usp.br | |||
| Instituição | Instituto Nacional de Pesquisas Espaciais | |||
| Cidade | São José dos Campos | |||
| Edição | 2a. | |||
| Histórico (UTC) | 2021-12-14 20:11:39 :: simone :: -> 2021 2021-12-14 20:22:36 :: simone -> administrator :: 2021 2022-07-08 19:41:33 :: administrator -> simone :: 2021 | |||
| 3. Conteúdo e estrutura | ||||
| É a matriz ou uma cópia? | é a matriz | |||
| Estágio do Conteúdo | concluido | |||
| Transferível | 1 | |||
| Palavras-Chave | ciência dos dados qualidade de dados dados meteorológicos data science data quality meteorological data | |||
| Resumo | Este projeto de iniciação científica teve como objetivo o desenvolvimento de algoritmos computacionais capazes de tratar dados brutos provenientes de sensores meteorológicos mantidos pelo Instituto Nacional de Pesquisas Espaciais (INPE), processá-los para um padrão de dados aceito internacionalmente e validá-los. Também foram desenvolvidos algoritmos para a interpretação gráfica das grandezas primárias medidas e para verificar a consistência dos dados de modo amigável ao usuário final. Dentre os sensores de chuva do INPE, foram analisados os dados provenientes dos disdrômetros de impacto, Joss-Waldvogel, e do disdrômetro a laser, PARSIVEL, ambos importantes na análise microfísica da precipitação. Os algoritmos de processamento de dados foram construídos para interpretar dados brutos gerados pelos sensores, levando em consideração dados faltantes, e converter o formato proprietário em Network Common Data Form (NetCDF4), amplamente utilizados pela comunidade científica. Esses arquivos seguem o padrão do Atmospheric Radiation Measurement (ARM/EUA), que normaliza a estrutura dos dados para algo aceito internacionalmente e sob alto rigor de qualidade. A avaliação dos dados processados por esses algoritmos foi feita com o uso de métricas bem difundidas na comunidade científica. De modo a avaliar a qualidade das informações dos equipamentos aqui relacionados, foi realizada inicialmente uma intercomparação entre sensores colocalizados para um experimento de campo liderado pelo INPE, o SOSCHUVA. Foi também utilizado um instrumento de referência para chuva, o pluviômetro. Os disdrômetros colocalizados no sítio de Jaquariúna-SP durante a campanha mostraram alta correlação, 0,9 entre as taxas de chuva medidas pelo pluviômetro e pelo disdrômetro Joss-Waldvogel e de 0,92 entre o pluviômetro e o disdrômetro PARSIVEL, indicando uma alta confiabilidade nas medidas realizadas por esses instrumentos e nos algoritmos desenvolvidos. Assim, visamos executar esses algoritmos em outras campanhas do INPE, como o CHUVA, GoAmazon e ATTO, facilitando o seu processamento e distribuição. Espera-se com essas ferramentas otimizar os processamentos dos dados e acelerar as pesquisas realizadas com estes instrumentos, trazendo visibilidade à instituição por meio da qualidade das informações. ABSTRACT: This undergraduate research project aimed to develop computational algorithms capable of treating raw data originating from meteorological sensors maintained by the Instituto Nacional de Pesquisas Espaciais (National Institute for Space Research - INPE), to process that data to an internationally recognized data standard and to validate it. Algorithms for the graphical interpretation of the primary variables of the data were also developed, along with additional algorithms designed to verify its consistency in a user-friendly way. Among INPEs climate sensors, the data analyzed came from Joss-Waldvogel impact disdrometers and from PARSIVEL laser disdrometers, both of which are important in the microphysical analysis of rain. The data processing algorithms were developed to interpret raw data generated by the sensors, taking missing data into account, and to convert their proprietary file format into a Network Common Data Form (NetCDF4) format, which is widely use by the international scientific community. These files follow the Atmospheric Radiation Measurement (ARM/USA) data standards, which standardize the structure of the data to a high degree of quality. The data processed by these algorithms was evaluated with commonly used metrics in the wider scientific community. In order to evaluate the quality of the information obtained from the previously mentioned sensors, data from colocalized sensors belonging to the INPE maintained SOSCHUVA campaign was intercompared. A pluviometer was also used as a reference instrument for rain measurements. The colocalized disdrometers located at the Jaquariúna-SP site showed high correlations, namely, of 0.9 between the Joss-Waldvogel and pluviometer measurements and of 0.92 between the PARSIVEL and pluviometer sensors, which indicates a high degree of reliability in the measurements made by those sensors and in the data processing algorithms. We wish to use these algorithms in other INPE campaigns, such as CHUVA, GoAmazon and ATTO, facilitating the processing and distribution of data. With these tools, we hope to optimize the processing of meteorological data and to accelerate research developed with these instruments, bringing attention to the institution by its high data quality. | |||
| Área | FISMAT | |||
| Arranjo 1 | urlib.net > BDMCI > Fonds > Produção a partir de 2021 > CGIP > Ferramentas computacionais para... | |||
| Arranjo 2 | urlib.net > BDMCI > Fonds > Produção a partir de 2021 > COEPE > PIBIC/PIBITI 2021 > Ferramentas computacionais para... | |||
| Arranjo 3 | urlib.net > BDMCI > Fonds > Acervo PIBIC/PIBITI > PIBIC/PIBITI 2021 > Ferramentas computacionais para... | |||
| Conteúdo da Pasta doc | acessar | |||
| Conteúdo da Pasta source | não têm arquivos | |||
| Conteúdo da Pasta agreement |
| |||
| 4. Condições de acesso e uso | ||||
| URL dos dados | http://urlib.net/ibi/8JMKD3MGP3W34T/46243RL | |||
| URL dos dados zipados | http://urlib.net/zip/8JMKD3MGP3W34T/46243RL | |||
| Idioma | pt | |||
| Arquivo Alvo | Relatorio_Final_PIBIC_2020_2021_Guilherme_Alvarenga_Dias.pdf | |||
| Grupo de Usuários | simone | |||
| Visibilidade | shown | |||
| Permissão de Leitura | allow from all | |||
| Permissão de Atualização | não transferida | |||
| 5. Fontes relacionadas | ||||
| Edição Anterior | sid.inpe.br/mtc-m21c/2021/01.22.20.59 | |||
| Unidades Imediatamente Superiores | 8JMKD3MGPCW/46KUES5 8JMKD3MGPDW34P/478H5L5 | |||
| Lista de Itens Citando | sid.inpe.br/mtc-m16c/2022/07.08.19.08 2 | |||
| Acervo Hospedeiro | urlib.net/www/2021/06.04.03.40 | |||
| 6. Notas | ||||
| Notas | Bolsa PIBIC/PIBITI/INPE/CNPq. | |||
| Campos Vazios | archivingpolicy archivist callnumber contenttype copyholder copyright creatorhistory date descriptionlevel dissemination doi format isbn issn label lineage mark mirrorrepository nextedition orcid parameterlist parentrepositories previouslowerunit progress readergroup recipient reportnumber resumeid rightsholder schedulinginformation secondarydate secondarykey secondarymark secondarytype session shorttitle sponsor subject tertiarymark tertiarytype translator url versiontype | |||
| 7. Controle da descrição | ||||
| e-Mail (login) | simone | |||
| atualizar | ||||